Uyển Quý phi Tác Xước Lạc thị (索绰络氏) sinh vào ngày 11 tháng 9 (âm lịch) năm Đạo Quang thứ 15 (1835), xuất thân từ [Nội Vụ phủ Chính Bạch kỳ Quản lĩnh Hạ nhân], tức là người Bao y Chính Bạch kỳ. Bà cô của bà chính là Thụy Quý nhân của Thanh Cao Tông Càn Long Đế.

Xét về chỉnh thể gia tộc Tác Xước Lạc thị của bà còn cao hơn Tào gia - thế gia Nội vụ phủ khác được nhiều người biết đến. Ông cố Đức Bảo (德保), ông nội Anh Hòa (英和) và cha bà Khuê Chiếu đều là những người uyên bác, dùng văn thơ xây dựng sự nghiệp. Gia tộc của bà được xem là một thế gia khoa cử của Nội Vụ phủ, được xưng là "Bốn thế hệ, năm Hàn Lâm", thậm chí có người cho rằng đây là gia đình đứng đầu Nội vụ phủ.

Tổ tiên của bà là Đô Đồ (都图) vào những năm đầu triều Khang Hi từng được Khang Hi Đế ban họ [Thạch] (石), vì vậy bà còn được gọi là Thạch thị (石氏). Đô Đồ đương thời là Đại thần Nội vụ phủ, là sủng thần của Khang Hi. Con trai và cháu nội của Đô Đồ đều không xuất sĩ, chỉ là người nhàn tản của Chính Bạch kỳ. Điều này khiến cho thời trung hậu kỳ của triều Khang Hi, gia tộc này dần không còn nổi danh. Trưởng tôn của Đô Đồ là Phú Ninh (富宁), đậu Cử nhân vào những năm Ung Chính, bắt đầu từ đây mà gia tộc quay trở lại con đường khoa cử, gia thế càng lúc càng đi lên. Phú Ninh có một em trai là Vĩnh Ninh (永宁), con trai Vĩnh Ninh là Quan Bảo (观保) đậu Tiến Sĩ vào năm Càn Long thứ 2 (1737), làm quan đến Thượng thư, sau khi qua đời được truy thụy "Văn Cung" (文恭). Con gái của Quan Bảo chính là Trắc thất của Vinh Thuần Thân vương Vĩnh Kỳ.